Nel 1756 iniziano le opere di demolizione della fortezza, che termineranno nel 1920 con l'abbattimento delle mura e dei bastioni. Le otto lapidi vengono disperse, nonostante il contratto stipulato nel 1756 tra il demanio ex ducale e il comune per la conservazione di mura, torrioni e terragli. Nel 2007, durante il rifacimento di Piazza Martiri della Liberazione, vengono rinvenuti i resti delle mura. L'unica parte della cinta muraria che oggi possiamo ammirare è il basamento del torrione San Antonio incorporato nella rotonda del parco " La Fontanella", alcune parti del muro di sostegno della riva sinistra dell'invaso Tartaro-Fuga, e una parte delle mura a nord, inglobati nel muro di cinta di Palazzo Gonzaga Acerbi.